spark.sql.shuffle.partitions到底影响什么
在运行Spark sql作业时,我们经常会看到一个参数就是spark.sql.shuffle.partitions,而且默认值是200.这个参数到底影响了什么呢?今天咱们就梳理一下。 1、Spark ...
在运行Spark sql作业时,我们经常会看到一个参数就是spark.sql.shuffle.partitions,而且默认值是200.这个参数到底影响了什么呢?今天咱们就梳理一下。 1、Spark ...